Search results for "ETL procesi"
showing 3 items of 3 documents
Neviendabīgu integrētu datu avotu evolūcijas apstrāde
2020
Neviendabīgu integrētu datu avotu evolūcija ir kļuvusi par aktuālu problēmu, jo dati mūsdienās ir ļoti daudzveidīgi un to mainība ir dinamiska. Šī iemesla dēļ nepieciešams atrast veidus, kā datus no dažādiem datu avotiem maksimāli efektīvi apkopot un uzkrāt, apstrādājot arī datu struktūrās evolūcijas rezultātā radušās izmaiņas. Darba mērķis ir atrast risinājumu, kā apstrādāt neviendabīgu integrētu datu avotu evolūcijas rezultātā radušās izmaiņas un adaptēt tās sistēmā. Darbā veikta literatūras analīze par datu noliktavām, ETL procesiem un lielajiem datiem, kā arī izpētīta esoša datu avotu evolūcijas sistēma. Rezultātā piedāvāts risinājums - neviendabīgu integrētu datu avotu evolūcijas apstr…
ETL procesu implementācija, problēmas un risinājumi
2022
ETL procesu izmantošana paliek ar vien populārāka, un to rīku daudzums un dažādība arī palielinās un katram no tiem ir savi plusi un mīnusi, un katrs rīks ir piemērots atšķirīgai nozarei vai ETL procesa veidam. Šajā darbā tiek pētīti trīs ETL rīki Pentaho, Talend, CloverDX un to problēmas, datu transformāciju implementācijas, un risinājuma izvēle. Lai veiktu precīzākus mērījumus un labāk izprastu kā katrs rīks strādā, tika izveidoti trīs plāni pēc kuriem vadīties, pirmajā plānā transformācijai jāsastāv tikai no soļiem, otrajā plānā transformācijai jāsastāv no vaicājuma, trešajā plānā transformācija jāveido uz pieredzē balstītas optimizācijas, ko nepieciešams izpildīt katrā rīkā, lai saprast…
ETL procesu risinājumi lielo datu gadījumos
2016
Lielo datu milzīgais apjoms un tā straujais pieaugums liek meklēt jaunas un attīstīt esošās tehnoloģijas datu apstrādē, jo tradicionālie ETL jeb datu izgūšanas, transformācijas un ielādes rīki nespēj apstrādāt tādu apjomu. Darba mērķis ir izpētīt ETL procesu galvenās iezīmes un pieejamos risinājumus lielo datu apstrādē. Rezultātā tika aplūkoti galvenie izaicinājumi un sarežģījumi lielo datu apstrādē un apskatīti risinājumi ETL procesu veikšanai liela apjoma datiem. Darba izstrādes laikā tika veikta lietojuma gadījuma realizācija, lai novērtētu tradicionālā ETL rīka Pentaho Kettle iespējas un piemērotību liela apjoma datu apstrādei.